Spark流作业开发
平台支持SparkStream类型的流作业开发
注意:
需要创建stream项目才能跑streaming任务
目前stream任务支持python和jar两种类型,跟普通Jar作业开发方式一样
推荐使用structured streaming的方式代替原有的spark Streaming
structured streaming使用文档
平台支持SparkStream类型的流作业开发
注意:
需要创建stream项目才能跑streaming任务
目前stream任务支持python和jar两种类型,跟普通Jar作业开发方式一样
推荐使用structured streaming的方式代替原有的spark Streaming
structured streaming使用文档